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摘要 : [目的 /意义 ] 分 析 学 科 规 范 引文 影响 力 在 科学 评价 中 的 可 行 性 及 其 与 同行 评议 的 相关 性 ,为 负责 任 计 
量 及 以 其 为 支撑 的 同行 评议 提供 借鉴 。 [ 方法“ 过程] 选取 了 1000 以 及 InCites 平台 ,将 29 850 篇 细 胞 生物 学 文献 、 
30 326 篇 生物 技术 文献 的 CNCI( 学 科 规 范 化 引文 影响 力 ) 与 被 引 频 次 进行 相关 分 析 , 对 其 中 956 篇 细胞 生物 学 论 
文 的 CNCI 与 F1000 分 值 进行 斯 皮尔 曼 相 关系 数 检 验 。[ 结果 /结论 ] 研究 结果 表明 ,从 统计 学 视角 看 CNCI 与 被 引 
频次 呈 高 度 正 相关 ,与 F1000 分 值 呈 显 著 正 相关 ,同时 亦 存 在 二 者 相悖 的 情形 。 因 此 ,CNCI 在 一 定 程 度 上 能 够 反 

同行 评议 结果 、 能 代 偿 实施 学 术 影 响 力 归 誉 的 功能 ,并 适用 于 跨 学 科比 较 ; 但 同行 评议 或 CNCI 单独 作为 科学 评 
2 ,以 CNCI 为 代表 的 新 一 代 负 责任 计量 指标 为 支撑 的 同行 评议 将 成 为 未 来 科学 评价 的 主流 。 
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22014 年 12 月 18 日 , 备 受 瞩 目的 英国 科研 卓越 评 
件 体 系 REF 评审 结果 落下 帷幕 。2015 年 7 月 ,由 英国 
积 奖 计量 学 家 、 大 学 管理 人 员 公共 政策 专家 共同 撰写 
的 题 为 《计量 潮 :研究 评价 与 管理 指标 作用 的 独立 审查 


报告 》( The metric tide :report of the independent review 


of {le role of metrics in research assessment and manage- 
meaE) 问世 。 报 告 中 提出 负责 任 计量 (Responsible met- 
Tics 与 知情 同行 评议 (informed peer review) 的 计量 原 
则 ,并 特别 指出 ,科学 评价 倍 受 学 科 因 素 困 扰 ,建议 引 
入 学 科 规 范 化 引文 影响 力 指标 。 因 此 ,本 文选 取 Pa- 
Cites 平台 以 及 F1000 数据 库 ,探讨 学 科 规 范 化 引文 影 
响 力 (Category Normalized Citation Impact，CNCI) 在 科 
学 评价 中 的 可 行 性 及 其 与 同行 评议 的 相关 性 ,以 为 负 
责任 计量 及 知情 同行 评议 理念 的 实施 提供 借鉴 。 


1 相关 背景 
引用 影响 力 是 科学 计量 ,乃至 科学 评价 中 的 主角 


之 一 ,然而 不 同学 科 、 出 版 年 .文献 类 型 严重 制约 了 引 
影响 力 的 测定 。E. Garfield 曾 指 出 :不 同学 科 原 始 被 


引 频 次 不 能 直接 进行 比较 “”。《 莱 顿 宣言 ) 则 指出 :不 
同学 科 引 用 差异 显著 ,数学 期 刊 最 高 影响 因子 为 3, 细 
胞 生物 学 却 高 达 3021 。 鉴 于 引用 密度 (citation densi- 
ty) 的 差异 ,对 于 不 同学 科 ,\ 不 同 出 版 年 以 及 不 同文 献 
类 型 引用 指标 进行 规范 化 成 为 科学 计量 的 重要 课题 。 
1986 年 ,T. Braun 和 A. Schubert 在 Scientometrics 上 
发 表 《 不 同学 科 科 研 成 果 及 其 引用 影响 力 之 评价 》 一 
文 ,其 中 提出 建立 跨 学 科比 较 的 相对 指标 , 自 此 文献 计 
量 领 域 开 始 规 范 化 指标 的 探索 与 实践 ”。2010 年 ,H. 
F. Moed 提出 单 篇 文章 源 标 准 影响 指数 ( Source Normal- 
ized Impact per Paper,SNIP) ,其 中 从 篇 均 引 文 数 的 角 
度 , 借 鉴 引 用 潜力 和 标准 化 的 思想 修正 了 不 同学 科 期 
刊 引 用 行为 的 差异 ,从 而 实现 了 不 同学 科 领 域 间 期 刊 
的 直接 比较 。 近 年 来 ,伴随 着 英国 高 等 教育 从 基于 同 
行 评议 的 RAE 到 以 计量 为 主体 的 REF 的 变革 ,计量 潮 
席卷 全 球 ,科学 计量 从 情报 学 分 支 进化 为 科技 政策 制 
定 力 至 科研 管理 的 重要 工具 ,多 学 科 评 价 成 为 当 务 之 
急 ,因此 , 汤 森 路 透 科技 集团 ( 现 科 寄 唯 安 ) 在 其 科研 
评价 平台 InCites 中 推出 CNCI, 以 应 不 同学 科学 术 影 响 
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力 比较 之 需 。 

作为 本 文 比较 对 象 的 F1000( 即 Facaulty of 1000 ) ， 
为 生物 医学 领域 后 同行 评议 (post -publication peer re- 
view) 平 台 。2002 年 由 V. Tracz 基于 由 千 名 科学 家 构 
成 虚拟 团队 的 理念 而 创立 。2015 年 ,在 痛 诉 传统 科学 
出 版 “五 宗 罪 ?之 余 ,V. Tracz 将 F1000 整合 为 三 项 独 
特 的 服务 : 即 F1000Prime、Fl000Research 以 及 
F1000Posters , 从 而 集 开放 获取 期 刊 .开放 数据 、 开 放 同 
行 评议 .开放 科学 于 一 体 ,并 保证 了 人 研究 成 果 的 及 时 传 
播 5。 其 中 ,Fl000Prime 是 目前 世界 上 唯一 依据 8 000 
多 名 生物 学 和 医学 领域 顶尖 科学 家 同行 评议 结果 对 最 
重要 的 科研 论文 提供 在 线 推荐 服务 的 平台 ,F1000 
子 (F1000 Score, FS) 为 专家 评议 分 值 。 因 此 ,F1000 


不 便 是 检索 工具 ,同时 也 是 重要 的 科学 评价 工具 。 
写本 文 以 FS 为 准绳 ,通过 FS 与 对 应 论文 CNCI 的 相 
关 编 析 ,探索 CNCI 为 代表 的 新 一 代 计量 指标 在 科学 评 


优生 的 适用 性 。 


数据 的 采集 与 统计 

@ 〇 作为 新 一 代 研 究 分 析 平台 ,InCites 数据 库 基于 汤 
禾 店 天 Web of science 核心 合集 大 索引 数据 库 而 建 
ED 其 中 一 篇 文献 的 CNCI 是 这 样 定义 的 :一 篇 文献 实 
际 测 引 次 数 除 以 同文 献 类 型 . 同 出 版 年 .同学 科 领 域 广 
献 例 期 望 被 引 次 数 '9 。 其 计算 公式 为 : 
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当 一 篇 文献 被 划 归 至 多 个 学 科 领 域 时 , 则 使 用 每 
个 学 科 领 域 实际 被 引 次 数 与 期 望 被 引 次 数 比 值 的 平均 
值 , 其 计算 公式 为 : 
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CNCI= 


这 里 ,e = 期 望 引用 率 或 基线 值 ,c= 总 被 引 次 数 ， 
f= 学 科 领 域 ,t= 出 版 年 ,d = 文献 类 型 ,n = 论文 被 
划 归 的 学 科 领 域 数 。 

如 果 CNCI 的 值 等 于 1, 表明 该 篇 论文 的 被 引 表现 
与 全 球 平 均 水 平 相 当 ,CNCI 大 于 1, 则 表明 该 篇 论文 的 
被 引 表 现 高 于 全 球 平均 水 平 ;小 于 1, 则 低 于 全 球 平 均 
水 平 。 从 这 一 意义 上 说 ,CNCI 排除 了 出 版 年 学科 领 
域 与 文献 类 型 的 影响 ,是 一 个 具有 实用 价值 的 影响 力 
指标 。 

InCites 平台 检索 表明 ,基于 Web of Science 252 个 
不 同学 科 分 类 的 论文 .综述 的 被 引 频 次 差异 显著 ,从 材 
料 科学 的 754 184 次 到 诗歌 艺术 的 51 次 。 图 1. 图 3 为 
2014 年 不 同学 科 论 文 .综述 被 引 频 次 与 学 科 规 范 化 引 

影响 力 差 异性 对 比 图 ,图 2、 图 4 为 不 同学 科 论 文 、 综 

述 篇 均 被 引 及 学 科 规 范 化 引文 影响 力 差 异性 对 比 图 ， 
其 中 横 轴 代表 不 同学 科 , 纵 轴 代 表 被 引 频 次 或 学 科 规 
范 化 引文 影响 力 数值 。 因 此 表明 在 科学 评价 实践 中 引 
入 CNCI 指标 的 必要 性 。 对 此 ,L. Bornmann 、L. Leydes- 
dorff 等 学 者 进行 了 深入 分 析 和 验证 ””。 
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不 同学 科 论 文 被 引 频 次 及 学 科 规 范 化 引文 影响 力 的 差异 性 对 比 
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3 不 同学 科 综 述 被 引 频 次 及 学 科 规 范 化 引 


本 文 确定 2014 为 统计 年 ,以 保证 足够 的 统计 被 引 
区 间 。 数 据 采集 步 又 如 下 :中 确定 统计 对 象 :在 InCites 
平台 提供 的 9 种 学 科 分 类 体系 中 ,本 文选 取 常 用 的 
Web of Science 分 类 ,将 Web of Science 的 252 个 分 类 
与 F1000Prime 高 级 检索 界面 中 40 个 研究 方向 进行 对 
比 , 从 而 确定 二 者 共同 的 细胞 生物 学 ( Cell biology) 、 生 
物 技 术 (biotechnology ) 为 统计 对 象 。@ 在 InCites 平台 
中 检索 。 以 细胞 生物 学 为 例 , 在 筛选 项 中 拟定 检索 式 
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2 不 同学 科 论 文 篇 均 被 引 频 次 及 学 科 规 范 化 引文 影响 力 的 差异 性 对 比 
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为 field = cell biology and article publication date =2014。 
今 索 结果 为 细胞 生物 学 论文 26 137 篇 ,综述 3 713 篇 ; 
生物 技术 论文 27 660 篇 ,综述 2 666 篇 。 继 而 ,检索 获 
得 每 篇 论文 的 DOI 标题, 作者 被 引 频 次 .CNCI、 学 科 
领域 百 分 位 期刊 规 范 化 引文 影响 力 、 期 刊 影响 因子 等 
指标 ”。@ 在 F1000Prime 中 进行 高 级 检索 , 仍 以 细胞 
生物 学 为 例 ,检索 式 为 article publication date = 2014 
and facaulties = cell biology ,检索 获得 细胞 生物 学 文献 
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睁 二 由 世 浊 ”时 大 班 虹 淮 侯 神 苦 攻 目 摊 到 寂 地 党 全家 要 守 讶 不 各 姑 济 浴 纺 妇 扫 玉 卡 合 窜 旦 
要 艾 办 杂 温 过 类 苔 过 长 不 TT 辟 蚀 炬 上 记 则 民 地 长 CU 出 
二 芯 = rT 攻 起 所 钵 什 埋 漳 展 了 昱 区 
济世 长 装 | 湛 站 册 潭 二 
志 忧 撕 | 长 本 册 
加 区 密 3 
本 愉 浴 
> 六 
LO 图 4 不 同学 科 综 述 篇 均 被 引 频 次 及 学 科 规 范 化 引文 影响 力 的 差异 性 对 比 
3 6 引 篇 ,生物 技术 文献 2 225 篇 ,同时 抓 取 每 篇 文献 的 3 713 篇 细胞 生物 学 综述 CNCI 与 被 引 频次 的 斯 皮 


标题 .DOI 以 及 FS。 检索 时 间 为 2017 年 6 月 5 日。 

if(countif( ,),“S”,“F”) 组 合 函 数 与 VLOOK- 

UE( 丽 数 筛选 具有 共同 DOI 的 文献 及 其 CNCI、FS 数 

因此 获得 956 篇 细胞 生物 学 论文 ,20 篇 细胞 生物 

综 迷 、 91 篇 生物 技术 论文 (生物 技术 综述 数量 过 少 , 不 
上 统计 意义 ， 略 去 ) 用 于 进一步 分 析 。 


数据 的 处 理 


Eee 借助 SPSS22. 0 进行 统计 分 
ss 行 数据 正 态 性 分 析 , 以 便 对 
数据 的 分 布 状态 进行 探测 ,并 选用 适宜 的 统计 学 方法 。 
分 析 表 明 ( 过 程 从 略 ) ,显著 性 水 平 小 于 0.05 ,因此 上 
述 数据 集 均 不 服从 正 态 分 布 , 故 选 用 非 参数 的 斯 皮尔 
曼 检 验 为 宜 。 
3.1 单 篇 论文 被 引 频 次 与 CNCI 相关 分 析 

26 137 篇 细胞 生物 学 论文 CNCI 与 被 引 频 次 的 斯 
皮尔 曼 相关 分 析 结 果 见 表 1,27 660 篇 生物 技术 论文 分 
析 结 果 从 略 。 其 中 DCF 代表 被 引 频 次 。 

表 1 细胞 生物 论文 CNCI 与 被 引 频 次 相关 性 


DCF CNCI 
Spearman 的 tho DCF 相关 系数 1.000 .989 ** 
显著 性 〈 双 尾 ) .000 
N 26 137 26 137 
CNCI 相关 系数 .989 六 1. 000 
显著 性 ( 双 尾 ) .000 
N 26 137 26 137 


注 :**. 在 0.01 显著 性 水 平 上 ( 双 尾 ) 


尔 曼 相关 分 析 结 果 (2 666 篇 生物 技术 综述 
略 ) ,如 表 2 所 示 : 


术 分 析 结 果 从 


表 2 细胞 生物 综述 CNCI 与 被 引 频次 相关 性 

DCF CNCI 
Spearman 的 rho DCF 相关 系数 1. 000 .990 ** 
显著 性 ( 双 尾 ) l .000 

N 3713 3713 

CNCI 相关 系数 .990** 1.000 

显著 性 ( 双 尾 ) .000 
N 3 713 3 713 


注 : .在 0.01 显著 性 水 平 上 ( 双 尾 ) 


3.2 单 篇 论文 CNCI 与 FS 相关 分 析 

以 细胞 生物 学 论文 为 例 ,956 篇 细胞 生物 论文 
DCF CNCI 与 FS 斯 皮尔 曼 相 关 分 析 结 果 如 表 3 和 表 4 
所 示 : 


表 3 细胞 生物 学 论文 CNCI 与 FS 相关 性 


DCF CNCI FS 
Spearman 的 rho DCF ”相关 系数 1.000 .990 .364** 
显著 性 ( 双 尾 ) 2 .000 .000 
N 956 956 956 
CNCI ”相关 系数 .990 * 1.000 .362 ** 
显著 性 ( 双 尾 ) .000 .000 
N 956 956 956 
FS 相关 系数 364 .362™* 1.000 
显著 性 ( 双 尾 ) .000 .000 s 
N 956 956 956 


注 :*"" .在 0.01 显著 性 水 平 上 ( 双 尾 ) 
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表 4 97 篇 细胞 生物 学 论文 CNCI 与 FS 相关 性 


CNCI FS 
Spearman 的 rho CNCI 相关 系数 1.000 .163 
显著 性 ( 双 尾 ) .110 
N 97 97 
FS 相关 系数 .163 1.000 
显著 性 ( 双 尾 ) .110 
N 97 97 


注 :”“. 在 0.01 显著 性 水 平 上 ( 双 尾 ) 


4 结果 与 讨论 
4.1 统计 检验 结果 

依据 相关 系数 1 r 1 三 0.8 为 高 度 相 关 ,0.5 三 1 r 1 
< 0.8 为 中 度 相关 ,0.3<1r 1 <0.5 为 低 度 相关 ,1 r 
<033 为 不 相关 的 界定 标准 ,上 述 相 关 性 分 析 结 果 如 


攻 


(2) 以 FS 为 准绳 ,在 956 篇 细胞 生物 学 .91 篇 4 
特 恨 术 论 文中 ,FS 与 CNCI 均 旦 显著 正 相关 ,相关 度 分 
曙光 0.362.0.443, 即 FS 与 CNCI 总 体 变动 方向 一 致 。 
然而 低 度 相关 的 结果 证 明 FS 与 CNCI 两 个 变量 在 变动 
方面 总 体 一 致 的 趋向 下 , 亦 存在 着 不 同 之 处 , 即 存在 同 
得 党 议 与 引文 分 析 相 左 的 情形 。 具 体 地 说 ,有 一 些 论 
文海 家 打分 很 高 然而 被 引 频 次 .CNCI 较 低 ,反之 亦 然 。 
己 (3) 鉴 于 FS 与 CNCI 的 低 度 相关 ,这 里 以 细胞 生 
物 信 论文 为 例 , 进 一 步 选 取 细胞 生物 学 中 FS 为 5 以 上 
的 97 篇 论文 进行 同行 评议 与 CNCI 相关 性 分 析 ( 见 表 
4) 。 分 析 表 明 ,二 者 相悖 的 趋向 愈加 显 化 ,相关 度 由 原 
有 的 0.362 下 降 为 0.163, 即 从 低 度 相关 进入 不 相关 。 
进一步 观察 ,证 实 了 这 一 结论 的 可 信 性 。956 篇 论文 
中 ,FS 居于 第 二 位 的 论文 ,CNCI 为 611 位 ;反之 ,CNCI 
排名 第 一 的 论文 ,FS 居于 420 位 ,CNCI 排名 第 二 的 论 
文 ,FS 仅 居 666 位 。 
4.2 结果 分 析 
(1) 基 于 引用 的 CNCI 与 基于 质量 考量 的 FS 正 相 
关 即 说 明 二 者 总 体 目标 的 一 致 性 ,并 很 好 地 诠释 了 


FT 


此 ,基于 指标 构建 学 术 影 响 力 框架 时 ,一 套 指标 完胜 于 
单个 指标 ,以 取得 更 好 的 信 度 与 效 度 。 同 时 ,鉴于 与 同 
行 评议 结果 的 契合 度 是 衡量 指标 好 坏 的 重要 夸 码 , 通 
过 CNCI 等 指标 与 开放 同行 评议 结果 F1000 因子 的 相 
关 性 ,探索 同行 评议 与 CNCI 结合 的 方式 ,将 使 科学 评 
价 结果 更 逼近 评价 对 象 本 来 面目 。 
(2) 在 FS 与 CNCI 总 体 一 致 的 趋向 下 , 亦 不 排除 
二 者 相悖 的 情形 ,因此 进一步 说 明 同 行 评议 或 引文 分 
析 , 单 独 作为 科学 评价 标准 都 会 有 失 偏 颇 。 无 疑 ,无 论 
是 同行 评议 还 是 引用 都 是 令 人 信赖 的 ,同行 评议 作为 
信息 “守门 人 ”保证 进入 交流 系统 信息 的 质量 ,特别 是 
F1000 通过 后 同行 评议 对 信息 进行 了 再 净化 ,保证 了 
信息 的 高 度 洲 选 和 过 滤 ;CNCI 等 基于 引用 的 文献 计量 
指标 则 描述 了 知识 在 科学 共同 体 中 的 扩散 过 程 。 按 照 
J. Wilsdon 的 观点 :“ 目 前 广 为 采 用 的 文献 计量 指标 即 
是 引用 统计 ” ;上 默 顿 则 指出 :“ 引文 是 科学 系统 中 用 
来 偿还 研究 债务 的 货币 ”。 因 此 ,一 般 认为 :引用 是 学 
影响 力 的 可 量度 指标 。 那 么 , 低 度 相关 的 结果 则 标 
志 着 科学 评价 中 同行 评议 和 引文 分 析 作 为 质 性 评价 和 
影响 力 揭示 维度 的 不 同 。 因 此 ,二 者 有 机 结合 的 方式 ， 
即 如 何以 计量 支撑 同行 评议 是 未 来 科学 评价 的 核心 议 
题 。 
(3) CNCI 立足 于 消除 引用 影响 力 的 学 科 偏 态 分 
布 , 故 在 跨 学 科比 较 方 面 较 被 引 频 次 等 传统 引文 分 析 
指标 具有 一 定 的 先进 性 。 然 而 , 目前 CNCI 困 周 于 学 
科 分 类 的 敏感 性 ,因此 ,如 何 规避 其 局 限 性 ,并 选取 与 
被 引 频 次 . 帮 至 同行 评议 结果 契合 度 较 高 的 算法 是 值 
得 研究 的 问题 。 本 文中 ,F1000 与 InCites 相同 主题 检 
索 的 匹配 度 最 高 的 细胞 生物 学 论文 仅 为 3.65% 。 究 
其 原因 ,一 方面 二 者 洲 选 原则 不 同 所 致 : 即 Web of Sci- 
ence 以 期 刊 的 高 度 六 选 著称 ,而 F1000 以 “好 论文 不 问 
出 处 ”为 信条 ; 另 一 方面 说 明 学 科 分 类 对 于 CNCI 影响 
甚大 。 因 此 ,InCites 平台 提供 Web of Science .ESI 法 
城 手册 (Frascati) .英国 的 RAE 澳大利亚 的 ERA 等 9 
种 学 科 分 类 体系 。2014 年 ,英国 REF 的 实施 将 CNCI 
从 理论 探索 推 向 实际 应 用 ,分 学 科 评 价 提 上 议事 日 程 。 
在 我 国 ,武夷 山 等 针对 科研 评价 中 的 问题 也 早已 提出 


际 最 新 主流 理念 一 一 知情 同行 评议 。 事实 上 ,在 科学 
评价 实践 中 ,一 方面 ,指标 是 量化 分 析 的 基本 元 素 ; 为 
一 方面 ,指标 在 简化 认识 的 同时 伴随 着 信息 的 流失 ,并 
且 没 有 一 个 单一 指标 可 以 涉及 所 有 的 关键 变量 。 
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同类 比较 , 即 分 类 管理 ,分 类 评价 的 计量 原则 。2015 
年 ,中 共 中 央 办 公 厅 国务 院 办 公 厅 出 台 的 《深化 科技 体 
制 改革 实施 方案 》,2016 年 ,教育 部 社会 科学 委员 会 发 
布 的 《高 等 学 校 哲 学 社会 科学 研究 评价 指南 》, 皆 提出 


aX 


ChinaXiy 合 作 其 于 
宋 丽 萍 ， 王 建 芳 . 基于 学 科 规 范 引 文 影响 力 与 同行 评议 相关 性 的 科学 评价 实证 研究 [本]. 四 书 情 失 上 站 弱 凡 人 全 


=128; 


建立 分 类 评价 制度 。 由 此 可 见 , 分 类 评价 已 成 为 国内 
外 科学 共同 体 的 共识 。 然 而 ,分 类 体系 在 一 定 程度 上 
干扰 着 CNCI 计算 结果 。 为 此 ,计量 学 家 在 提醒 人 们 选 
择 合适 的 分 类 体系 的 同时 ,积极 探索 CNCI 的 变 体 ,以 
统一 样本 的 统计 分 布 性 .更 好 地 消除 引用 影响 力 的 学 
科 偏 态 分 布 造成 的 不 可 比 性 。L. Waltman、L. Born- 
mann .L. Leydesdorff、H. F. Moed 、M. Thelwall 等 学 者 开 
发 的 诸多 学 科 规 范 化 算法 ,S. Haustein 等 提出 的 相对 
引用 比 (Relative Citation Ratio) 即 是 在 此 方面 做 出 的 学 
i 

(4) 同行 评议 与 CNCI 有 机 结合 使 ( 莱 顿 宣言 > 和 
负责 任 计量 的 思想 具体 化 。 莱 顿 宣言 的 总 体 原则 即 是 
保持 以 FS 为 代表 的 质 性 评价 第 一 位 。 与 此 同时 ,学 科 
规范 化 已 经 作为 十 大 原则 之 一 列 入 《 莱 顿 宣言 ) 成 为 
科学 评价 的 岗 领 之 一 。 从 根本 上 说 ,科学 评价 的 主 
要 上 岂 的 就 是 鉴别 ,促进 和 扶植 卓越 ,科学 计量 则 是 以 
SB 目的 为 核心 而 建立 的 一 系列 指标 与 方法 。CNCI 
则 代表 着 以 负责 任 计量 为 主导 思想 而 建立 的 科学 评 
许 标 ,从 而 保证 基于 计量 的 同行 评议 的 付 诸 实施 。 


通过 上 述 分 析 ,得 出 结论 : 
=(1)CNCI 在 跨 学 科比 较 方 面具 有 一 定 的 先进 性 ， 
可 观 代 偿 执 行 引用 统计 的 信息 过 滤 与 学 术 影响 力 归 淮 
的 功能 。 但 是 ,鉴于 其 对 于 学 科 分 类 的 敏感 性 ,如 何 优 
化 CNCI 目前 归 一 化 算法 (Mean Normalised Citation 
Score) ,以 便 在 不 改变 数据 性 质 和 相对 关系 的 前 提 下 ， 
更 好 地 适应 不 同学 科 引 文 的 偏 态 分 布 是 探索 中 的 问 


日 
题 。 


(2) 在 科学 评价 实践 中 ,鉴于 同行 评议 的 主观 性 
和 “ 马 太 效应 ”, 基 于 引用 的 指标 可 以 用 来 辅助 同行 评 
议 , 以 实现 更 深入 的 公众 参与 .体现 科研 评价 的 民主 
化 ,并 提升 同行 评议 质量 、 降 低 其 偏见 与 风险 "" 。 然 
而 ,如 何 将 二 者 有 机 结合 是 探索 中 的 问题 。CNCI 代表 
了 一 种 尝试 和 趋向 ,其 迎合 了 负责 任 计 量 分 学 科 评 价 
之 需 , 一 定 程度 上 能 够 反映 同行 评议 结果 ,从 而 为 同行 
评议 提供 有 力 文 撑 。 

(3) CNCI 等 文献 计量 指标 与 同行 评议 有 机 结合 的 


方式 将 是 未 来 科学 评价 的 主流 ,从 而 保证 基于 计量 的 
科学 评价 的 付 诸 实施 。 
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An Empirical Study of Scientific Evaluation Based on the Correlation 
Between CNCI and Peer Review 
Song Liping : Wang Jianfang” 
! Management School of Tianjin Normal University, Tianjin 300387 
? Institutes of Science and Development, Chinese Academy of Sciences, Beijing 100190 

Abstract: [Purpose/significance | In order to make some recommendations for responsible metrics and peer review ， 
the paper analyses the feasibility of Category Normalized Citation Impact ( CNCI) and its correlation with peer review. 
[ Method/process | By choosing F1000 and InCites, this paper conducted the correlation analysis between CNCI and cita- 
tion counts of 29 ,850 cell biology papers and 30 ,326 biotechnology papers, and performed the test of spearman rank cor- 
relation coefficient between the CNCI and F1000 scores of 956 cell biology papers. [ Result/conclusion | The results show 
that CNCI is positively correlated with citation counts, and significantly correlated with F1000 rating, but there are contra- 
dictory situations for the two indicators at the same time. Therefore, CNCI can reflect the results of peer review, substitute 
forsthe indication of academic influence, and also can be used for comparision among disciplines. However, peer review or 
CNEI will be biased for scientific evaluation purpose alone. Then, tools that link responsible metrics indicators, such as 
CNGI and informed peer reviews would be valuable additions to the field of research evaluation. 


‘Keywords: peer review responsible metrics F1000 InCites 
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1. 文 化 强国 建设 中 图 书馆 的 使 命 与 担当 11. 图 书馆 个 性 化 与 精准 化 服务 

2. 大 数据 时 代 图 书 情报 学 知识 体系 重 构 12. 数字 人 文 数字 遗产 及 其 相关 技术 

3. 图 书 情 报 领 域 相关 法 律 法 规 与 制度 研究 13. 语义 技术 、 关 联 数据 与 知识 组 织 

4. 图 书 情报 事业 平衡 充分 发 展 战略 研究 14. 人 工 智 能 技术 及 其 在 图 书馆 中 的 应 用 

5. 图 书馆 支撑 “ 双 一 流 ” 建 设 的 能 力 与 策略 15. 万 物 智能 的 发 展 趋势 与 图 书馆 服务 创新 
6. 大 数据 环境 下 图 书馆 元 数据 体系 构建 16. 图 书馆 阅读 推广 理论 与 实践 

7. 信息 用 户 行 为 与 用 户 画像 研究 17. 开放 数据 与 信息 安全 政策 

8. 智库 研究 与 智库 服务 18. 图 书馆 空间 再 造 的 理论 与 实践 

9. 资源 发 现 与 图 书馆 资源 建设 新 模式 19. 图 书馆 与 数字 出 版 (图 书馆 出 版 ) 

10. 数字 文献 与 数据 管理 及 长 期 保存 20. 新 时 代 图 书馆 学 情报 学 理论 体系 建设 
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